2018年4月17日
By 1月时特约编辑
专题文章

NAB 2018: Reza Rassool演讲RealNetworks HD

在NAB, 1月时会见了大约12家持有HEVC和/或AV1股份的公司. 这是他对他们进行的一系列视频采访中的另一个.

1月时: 今天我在NAB和RealNetworks的首席技术官Reza Rassool在一起. 我们在NAB花了很多时间讨论HEVC和AV1 RealNetworks有一个替代方案叫做RealNetworks HD. 不如你跟我讲讲编解码器是做什么的，什么时候出来的，谁在用，为什么.

Reza Rassool: 让我告诉你关于RealMedia编解码器. 与MPEG类编解码器相比，它是一种非常不同的编解码器方法. 它仍然是一个二维编解码器，使用相同的方法. 它是基于dct. 它是运动估计，但是是算术编码，使用类似的技术. 但我们采取了一种追求低复杂性解决方案的方法.

我们相信MPEG编解码器类和所有由委员会设计的编解码器最终追求的是高复杂性的结果. 我们可能认为，这是不必要的高复杂性. 我们给编解码器组派了个任务. 我们要求他们提出一种编解码器，既能与HEVC竞争，又能在软件中解码, 在移动处理器上, 而且以前不把电池耗光. 因此，一个可以与HEVC竞争的实用软件编解码器.

这个项目于2014年启动，实际上是由我们的北京办公室运营的. So, 最终的结果——你可能会抢先了解一下——我们刚刚公布了竞争数据，我会发给你的. 事实上，我是在采访前发给你的. 看看结果吧. 我们的表现远远超过HEVC.

1月时: 根据哪个参数? 质量?

Reza Rassool: 因此，我们使用Netflix VMAF质量分数与比特率的关系，你可以看到经典的曲线. 和, 随着曲线部分的增加，质量也在增加, RMHD编解码器比AVC和HEVC的性能要好得多.

对于4K视频，我们做得比1080p视频好得多. 在标准清晰度480p的视频中，可能没有太大的优势. 这与AV1与HEVC比较的结果非常相似. 质量更高, 它开始伸展腿，跑得比HEVC快，但跑得比HEVC慢, 差别不大.

1月时: 什么是编码时间，什么是解码负载?

Reza Rassool: 编码时间非常快. 它比HEVC或x265要好得多. 我认为它要快五倍. 我们还为自己设定了一个目标，即任何在现代笔记本电脑上运行RealPlayer的消费者都应该能够实时编码1080p流. 我们已经做到了. 事实上, 如果你用的是超级快的处理器, 如果你使用线程撕裂器，你几乎可以实时编码4K. 但是我们像大多数编码器一样不断优化编码器. 你有机会去优化, 我们相信我们很快就能实现4K实时编码.

1月时: 你知道编解码器是一回事. 有时，使其能够实现可能是更大的挑战. 如果我说，“太好了，我想用你的编解码器，”我怎么在浏览器中播放呢? 如何在移动设备上播放? 如何在机顶盒和智能电视上播放?

Reza Rassool: 这是一个挑战. 让我先解决浏览器问题. 它目前不在浏览器中. 它是在浏览器中使用插件或ActiveX组件的一点帮助. 在RealPlayer中, 有一个嵌入式浏览器, 这样我们就可以将解码后的帧呈现到浏览器中. 这不是一个可以广泛发表的解决方案, 但在移动领域, 我们以几种形式提供编解码器. 在SDK表单中, 它被包装在一个播放器中, 应用程序开发人员可以将其部署到他们的移动应用程序中.

我们还为华为等手机制造商提供了OEM SDK. So, 如果你有华为手机的话, Mate 9手机在其操作系统中包含RealMedia编解码器. 因此，它成为了平台的原生编解码器. 这些手机，因为RealMedia编解码器可以说是中国事实上的编解码器. RealMedia编解码器的所有世代. 这是11代, 由于历史原因, RealPlayer和RealMedia编解码器在中国蓬勃发展. 我们可以解释为什么会这样，你们可能已经知道了这个故事. 我们已经广泛采用了华为的第11版代码, 我们正在与前几年采用RMVB的其他原始设备制造商进行接触.

它给他们带来好处，并告诉他们，“嘿，这是另一种选择.“这是HEVC的另一种选择. 这是software-decodable, 然后直接进入市场, 所以你不必等待可能需要18个月的芯片开发. 它消耗了多少电量? 在Mate 9手机这样的移动处理器上, 你可以在电池充满一次电的情况下看两个小时的电影，这是我们的另一个指标. 我们正在不断优化编解码器，甚至进一步. 随着我们与原始设备制造商的关系越来越密切, 我们找到了利用扩展指令集的方法, 或者可能是设备本身的未记录指令集，以提高编解码器的性能.

1月时: 据我所知，RealNetworks把所有与视频相关的编解码器IP都卖给了英特尔.

Reza Rassool: 这是2010年与rmvb相关的编解码器. 这是笔好交易. 出售IP. 保留了继续出售的权利，所以这是一笔有趣的交易. 我们也将这个团队以及西雅图团队转移到了英特尔. 那是2010年的交易. 在这个新的编解码器中，我们在北京组建了一个全新的团队. 现在，它已经结出了果实. 不仅在OEM领域，现在也在OTT领域. OTT运营商也在寻找一种替代的编解码器，不仅收取每台设备的费用, 但也对他们的流媒体业务征税. RealMedia编解码器为OTT运营商提供了一个很好的机会.

对于OTT运营商来说，RealMedia编解码器还有另一个独特的优势. 在OTT领域，简，与IPTV或有线电视非常不同. OTT运营商并不拥有机顶盒. 当你去买Fire电视或Roku时，这是你的选择. 你把它带回家，然后说:“我想用它看Netflix. 我想看Hulu或中国的类似服务，等等.“然后，当你连接它时，OTT运营商就会发现你的机顶盒的硬件能力.

我们最大的OTT运营商之一是国有广播公司CIBN. 这就像中国的CBS. 他们采用了RealMedia编解码器, 因为, 当他们分析他们的网络时, 他们说, “我们有74种不同的机顶盒型号，它们连接到我们的网络，具有各种不同的硬件功能.只有32%的公司在硬件上拥有HEVC. 他们最终失去了对编解码器的控制，并以SDK的形式将软件编解码器捆绑到他们的OTT应用中. 它让OTT运营商重新拥有了他们在有线电视时代所拥有的控制权, 他们在哪里用特定的编解码器构造了这个盒子.

就是这种细微差别, 这是我们在创建编解码器时没有预料到的, 这似乎是OTT的收购决策之一.

1月时: 很快地，让我们开始几个不同的话题. 似乎有一种印象是，你不可能在不涉足别人的IP的情况下构建编解码器. 现在你有了之前开发的IP，但你也创新了新的编解码器. 在不侵犯任何人的知识产权的情况下，你对编解码器的构造能力有何看法?

Reza Rassool: 这真的很难. 这是一个可怕的雷区. 向开放媒体联盟的AV1人员致敬，他们采取了不同的方法，并说, “如果你想来玩，就把你的权利放在门口."

尚无定论. 对我们来说, 我们建立在之前10次编解码器迭代的基础上, 我们知道当前技术和竞争方法的雷区，我们非常小心地确保我们在需要的地方使用了替代技术.

但是我们在RMHD中采用的方法是空间压缩而不是时间压缩. 这是什么意思呢? 当你从标准清晰度上升到720p到1080p再到4K, 空间分辨率一直在提高. 但在商业应用中，帧率并没有以相同的速率增长. 我们认为, 我们的编解码器有机会在空间压缩上加倍努力，并在这方面做得更好.

把复杂性和计算能力放在空间压缩上，也许可以减少时间压缩. 实际结果是，我们只寻找相邻帧之间的运动——这些长运动向量都不是参考帧, 16帧. 这大大降低了编解码器的复杂性. 内存占用现在非常小，线程复杂度也简单了很多. 你知道切片并行性和所有你在其他编解码器设计中需要做的粗糙的东西你有这些很长的参考, 这似乎得到了回报. 在我们测试的时候, 事实证明, 看看相邻帧之间的运动, 绰绰有余.

1月时: 我所做的测试表明，一个以上的b帧确实不会增加那么多的质量, 使用多个参考帧确实会增加编码时间，但质量却没有显著提高.

Reza Rassool: 好了.

1月时: 我猜你在RealNetworks网站上发表了你的发现?

Reza Rassool: 是的，在。职业网站.

1月时: 回到玩家方面，你认为浏览器的表现如何? 手机和OTT是很好的市场, 但是对于新的编解码器来说，最容易采用的市场总是浏览器. 你是在跟谷歌、Mozilla和微软说话吗?

Reza Rassool: 当然, 他们都有AV1的既得利益，他们说, “为什么这个行业需要另一种编解码器?“我只需要坚持我的口头禅:低复杂性、低复杂性、低复杂性. 摩尔定律最终胜出. 摩尔定律使CPU运算能力每年翻一番，并降低存储成本, 因此，软件解决方案总是比硅解决方案更灵活. 委员会设计方法会有意或无意地导致过于复杂的结果.